- 综合排序
- 最热优先
- 最新优先
- 来自专栏敏捷分析
腾讯灯塔融合引擎的设计与实践
丨导语丨 本文分享的主题是腾讯灯塔融合引擎的设计与实践，主要围绕以下四个方面进行介绍： 1. 背景介绍 2. 挑战与融合分析引擎的解法 3. 实践总结 4. 未来演进方向 分享作者｜冯国敬 腾讯 后台开发工程师 一 背景介绍 腾讯灯塔是一款端到端的全链路数据产品套件，旨在帮助产品、研发、运营和数据科学团队 30 分钟内做出更可信及时的决策，促进用户增长和留存 下图展示了灯塔融合分析引擎的整体技术架构： 左侧对接应用系统，包括灯塔自己提供的分析模型、可视化方案和一些 API 请求；右侧为融合分析引擎，包括查询引擎层、计算层、物化存储层、存储层分析策略中心和产品化中心 冯国敬 腾讯 后台开发工程师 2013年毕业于哈尔滨工业大学，一直从事大数据领域研发工作，目前在腾讯灯塔负责融合分析引擎的研发。 让数据驱动为企业增长决策指引方向 灯塔是腾讯大数据平台倾力打造的“一站式敏捷分析”平台，借助大数据套件及各类型原子能力，为企业发展和增长提供：从“数据上报、接入，到自定义万亿级实时数据分析，再到数据行动
1.5K20编辑于 2023-02-17 - 来自专栏敏捷分析
腾讯灯塔：我们更了解移动互联网用户
2015年10月22日，腾讯全球合作伙伴大会在重庆开幕，会上重磅发布《2015互联网+白皮书》。 腾讯灯塔依托拥有的海量移动互联网大数据，为《2015互联网+白皮书》提供数据支持。 腾讯灯塔在腾讯内外服务手机QQ、应用宝、浏览器、腾讯游戏、大众点评等重要应用，拥有10余年的无线运营和数据经验，覆盖月活8亿月活终端，10余万款机型，基于海量数据我们比你更了解移动互联网用户。 腾讯灯塔在白皮书《互联网+产业篇》中提供中国移动互联网用户分布及属性、移动互联网硬件设备、移动游戏玩家属性数据分析，让我们一睹为快吧！ 关注腾讯灯塔一起探索移动互联网世界
1.3K50编辑于 2022-08-25 - 来自专栏敏捷分析
腾讯灯塔DataTalk可视化平台之——组件设计
5 结尾 ” 01 DataTalk介绍 灯塔DataTalk——如同乐高，这是一个开放/自由的数据可视化世界 02 效果展示（下表均为虚拟数据，仅供参考） #1 大屏效果 #2 微博热搜 Datatalk 仍在不断迭代，欢迎大家提出宝贵意见，我们一同共建~您可以将您的想法留在评论区，或后台私信「腾讯灯塔」公众号，我们期待您的声音！
3.8K31编辑于 2022-08-25 - 来自专栏敏捷分析
腾讯灯塔视频号直播预告：数据分析学习方法论
点击蓝字 关注我们 // 本期主题 数据分析学习方法论 运营人必备的数据分析技能
67140编辑于 2022-12-09 数字海域的星辰指南：腾讯云AI代码助手的灯塔之旅
项目启动：技术架构的精心设计 小明在腾讯云服务器上启动了“智慧农场”项目，目标是构建一个高度可靠的实时监控系统。项目采用微服务架构，后端服务框架选用FastAPI，其异步特性有效处理了高并发数据流。 结语：技术深度与AI代码助手的协同 腾讯云AI代码助手是编程深海中的灯塔，小明的故事展示了如何通过深度技术解析和AI的辅助，实现智慧农场项目的高效开发和持续优化。
49760编辑于 2024-08-23- 来自专栏腾讯云TVP
走进灯塔工厂，腾讯云携手业界专家共筑AI智造未来
9 月 20 日，由腾讯云 TVP 与工业富联联合主办的「探访灯塔工厂，解码 AI 智造未来——腾讯云 TVP 走进工业富联」活动成功举办。 工业富联“灯塔工厂” 探索智能制造实践与创新 工业富联首席数据官 刘宗长与工业富联云平台总经理 王昕煜围绕《工业富联灯塔案例分享：智能制造实践与创新》的主题展开，详细阐述了工业富联的数字化转型历程和灯塔工厂的成功经验 工业富联云平台总经理 王昕煜 为什么工业富联要打造灯塔工厂？ 王昕煜表示，建设灯塔工厂的核心理念是基于实际生产需求推动先进案例的落地，为了支持灯塔工厂的建设，工业富联在人才、运营、技术和数据等方面提供全面的支持。 结语 在本次「探访灯塔工厂，解码 AI 智造未来——腾讯云 TVP 走进工业富联」活动中，无论从实地参观灯塔工厂，还是嘉宾演讲，分组讨论、思考提问，各位嘉宾从不同维度、不同视角洞察和分享 AI 在制造领域的巨大潜力与数字化转型的落地实践
76910编辑于 2024-09-29 - 来自专栏腾讯云服务器团队的专栏
腾讯云第一届「开发者开放麦」等你来talk！
推荐阅读 活动｜迎战11.11！企业专属1.1折券来了
1K30发布于 2021-10-29 - 来自专栏腾讯云Elasticsearch Service
通过spring-data-elasticsearch连接腾讯云ES
spring-data-elasticsearch有两种方式连接Elasticsearch，一种是TCP的方式，通过9300端口连接，还有一种是HTTP的方式，通过9200端口连接。 腾讯云ES提供了9200端口的HTTP方式来连接ES。 其中spring-data-elasticsearch的版本和Elasticsearch的版本需要匹配和兼容，本文使用的elasticsearch版本为6.4.3。 1、添加maven依赖包： <dependency> <groupId>org.springframework.data</groupId> <artifactId>spring-data-elasticsearch </artifactId> <version>3.2.0.RELEASE</version> </dependency> 其中Elasticsearch版本和Spring-data-elasticsearch
6.3K10发布于 2019-10-29 - 来自专栏敏捷分析
让「腾讯灯塔」送你出道！
丨导语丨 「腾讯灯塔」官方微信公众号于今年3月底再度启动运营，为了能与一直以来支持和陪伴我们的粉丝有更多的互动，也为了让我们的推文内容更加丰富，我们特别推出本次「有奖征稿」活动，只要你有自己的独到见解 ，只要你的声音想要被更多人听见，欢迎投稿，让「腾讯灯塔」送你C位出道~快跟着小编一起来看下活动具体规则吧！ 你可以是“种草官” 如果你是腾讯灯塔的忠实用户，可以从用户视角告诉大家你对灯塔产品的独到见解，你的操作小Tips；或者在实践过程中发现的产品新玩法，又或者是经验沉淀，统统都可 你可以是“领航员” 从业务视角把自己对于数据的思考和洞察分享给更多人圈内圈外人士 你的角色，你来定义 你的内容，你来做主 活动规则： 即日起，私信腾讯灯塔微信公众号后台，或直接滑动至本文最下方「点击发消息」，投稿上述干货类文章，即可获得QQ黄脸 × UHOU解压球/长鹅公仔等腾讯周边礼品 更多奖品等你来解锁 如果你让我给活动设一个期限，我会说： “即日起，至永久，想要多久就多久， 和灯塔陪伴你的日子一样999！” ❤️你的声音值得被听见~ 来「腾讯灯塔」随性表达！
55810编辑于 2022-08-25 - 来自专栏汽车出行行业云月刊
汽车经销商专刊【2023年3月刊】
缺乏数字化知识和专业人才，想要尽快转型，却不知如何下手；软件系统买了很多套，工作却越来越低效；客户资源愈发宝贵，私域运营却不知怎么做……对此，腾讯云推出了专门面向汽车经销商们的数字化转型方案，从企业管理和数字营销出发帮助经销商伙伴们高效转型 「腾讯乐享」作为腾讯14年内部实践的最佳沉淀，帮助企业搭建围绕企业培训、知识管理、文化建设三大核心场景的一站式平台。 「腾讯企点」多年深耕私域运营和客户服务领域，借助腾讯社交生态优势，不仅可以帮助企业构建起一体化的智能营销和服务平台，实现对客户全渠道全触点的深度连接，还在多年实践中发展出完善的私域运营方法论，通过对应的增值服务帮助企业真正掌握私域运营策略 「腾讯灯塔DataTalk」是一款面向不同用户角色、支持多种数据源、面向开放式业务场景的数据可视化和增强分析平台。 （下表为虚拟数据，仅供参考）图片图片----图片更多腾讯云优选文章，请访问腾讯云【开发者社区】
82960编辑于 2023-03-07 - 来自专栏腾讯大数据的专栏
腾讯大数据官网DATA.QQ.COM正式上线
恰逢首届世界互联网大会揭幕，腾讯大数据官网 DATA.QQ.COM 今日正式与大家见面。 除了展示腾讯比大更大的数据量，我们精心为大家准备了以下礼物： 数据报告：我们倾力为您打造了一个整合所有腾讯数据报告的平台。 我们首先向大家开放腾讯大数据的核心组件——腾讯分布式数据仓库（TDW）的源码，让大家一起分享腾讯大数据的技术红利。我们向您承诺，这仅仅只是开始。 如果您关心腾讯的明星产品，诸如微信，QQ，Qzone等，DATA.QQ.COM 首页将在每个季度为您更新这些产品的数据；如果您在乎腾讯大数据的体量，关心我们的进步，DATA.QQ.COM 也会在首页及时更新我们在业内引以为傲的成绩 海量数据，无限未来，尽在DATA.QQ.COM. 最后，感谢一直陪伴我们的小伙伴，感谢一直相信我们支持我们的合作伙伴，感谢所有在大数据之路上辛勤奋斗的Q哥Q妹！因为你们，我们更加精彩！
2.5K90发布于 2018-01-26 - 来自专栏TDP 官方运营
第一届腾讯云“开发者开放麦”，10月31日等你来talk！
2021年第一届腾讯云“开发者开放麦”活动火热报名中！！ 活动形式：线下+线上直播相结合同步进行 活动时间：2021年10月31日9:30-12:30 这是腾讯云第一次举办外部开发者与产研同学的线下交流活动，为此我们准备了很多惊喜，好奇的小伙伴快来点击海报下方链接报名参加吧 腾讯云第一届“开发者开放麦”活动，来了！！！ 这是一次与大V开发者们互动畅聊的机会； 这是一个开发者深入了解云产品，与腾讯云产研团队真诚沟通的平台； 这是一场可以尽情探讨产品体验，升级开发者体验感受的峰会！
1.2K104发布于 2021-10-20 - 来自专栏QQ大数据团队的专栏
腾讯云大数据Data+AI专场圆桌论坛实录
本文共计4760字 预计阅读时长15分钟 9月17日，2025腾讯全球数字生态大会腾讯云大数据Data+AI专场隆重举行。 专场中腾讯云大数据基础产品总经理程彬与复旦大学教授何震瀛、飞轮科技联合创始人肖康、AutoMQ创始人周新宇、Databend联合创始人吴炳锡、质变科技联合创始人魏闯先等多位专家共同围绕Data+AI的大的融合趋势 程彬：Data+AI大数据发展历史来看，它经历了二三十年的演进，Data+AI到今天为止就是Data跟AI结合过后，它的发展是线性的发展还是说会带来革命式的跃迁的发展，背后会不会有一个新的范式出现？ 肖康：我们公司是一家既做开源技术又做商业化产品的公司，我们既是开源阿帕奇最大的贡献者，也是最大的受益者，当然其实各家云厂商，包括腾讯云也是我们很好的合作伙伴，所以一起去构建这个开源的生态，再把一些有需要商业服务的客户为他们提供商业产品和服务 吴炳锡：我觉得未来有几个方向是特别大的点，一是数据集市，现在停留在API的数据交流，未来会停留在大的数据集交换，这可能是依赖于腾讯云公有云的基础设施来帮我们提供。
31410编辑于 2025-09-29 - 来自专栏腾讯高校合作
腾讯大数据官网DATA.QQ.COM正式上线
本文转自腾讯大数据官方公众帐号 腾讯大数据官网 DATA.QQ.COM 于首届互联网大会揭幕之际正式与大家见面了。 除了展示腾讯比大更大的数据量，我们精心为大家准备了以下礼物： 数据报告：我们倾力为您打造了一个整合所有腾讯数据报告的平台。 我们首先向大家开放腾讯大数据的核心组件——腾讯分布式数据仓库（TDW）的源码，让大家一起分享腾讯大数据的技术红利。我们向您承诺，这仅仅只是开始。 如果您关心腾讯的明星产品，诸如微信，QQ，Qzone等，DATA.QQ.COM 首页将在每个季度为您更新这些产品的数据；如果您在乎腾讯大数据的体量，关心我们的进步，DATA.QQ.COM 也会在首页及时更新我们在业内引以为傲的成绩 海量数据，无限未来，尽在DATA.QQ.COM. 最后，感谢一直陪伴我们的小伙伴，感谢一直相信我们支持我们的合作伙伴，感谢所有在大数据之路上辛勤奋斗的Q哥Q妹！因为你们，我们更加精彩！
3.7K40发布于 2018-03-19 - 来自专栏敏捷分析
【光子工作室 × 腾讯灯塔】看光子创新研发基地如何利用 BI 加速数字化管理
一次偶然的机会，我们了解到司内的 BI 工具 DataTalk 以及灯塔平台的其他数据产品。 光子美术和设计中心尝试通过 DataTalk 解决一些团队数据管理和可视化的需求，同时通过Oteam的协同，光子美术中心和设计中心，联手灯塔平台开设了为期4期的《BI赋能项目管理训练营》，面向光子所有同学进行阶梯式的培训和分享课程的讲解 01 打通各类数据源，统一的数据仓库管理 将日常内部传阅管理的腾讯文档数据上传至 DataTalk 数据管理系统，通过关键字段对不同数据源进行合并查询。 除此之外，DataTalk 还支持连接灯塔数据源、应用数据源、DataHub 以及 本地Excel 上传等多种方式，大大提升了对于多数据分布业务来讲的数据处理能力。
1.6K30编辑于 2022-08-25 - 来自专栏敏捷分析
灯塔DataTalk——如同乐高，这是一个开放自由的数据可视化世界
点击蓝字 关注我们 // 从DataTalk的名字就可以看出，用数据(data)去对话(talk)。数据驱动决策的理念已经在不断地深入人心，目前商业领域由数据驱动的程度与日俱增。 熟悉灯塔分析(DataInsight)的小伙伴，这时可能会问，这二者又有何区别？DataInsight专注的是BI，包含着强大的融合分析引擎，拥有着诸多的分析模型，面对更多的是分析的场景。 前面提到过，DataTalk支持多种不同的数据源，下面我们一起来看下，到底支持哪些： 我们目前支持的不同种类的数据源，可直连业务DB，灯塔分析转存，以及各种数据库和强大的灯塔融合计算引擎，本地文档，腾讯文档和 这里我们推送到邮箱是以截图形式进行，那么截图服务是基于puppeteer进行，后期也将整个截图服务基于腾讯云ServerLess，使用FaaS进行了改造，并成为了组内公共模块，目前灯塔分析的推送截图也是基于此
3.4K31编辑于 2022-08-25 - 来自专栏敏捷分析
《2015互联网+白皮书》预约抢号
2015年腾讯全球合作伙伴大会主论坛，腾讯集团首席运营官任宇昕代表腾讯发布了《2015互联网+白皮书》,白皮书一经发布，会场内就被哄抢一空，一书难求! 灯塔与众创空间合作，105本白皮书免费赠与与会人员，数量有限，即刻关注腾讯灯塔公众号，预约抢号！！ 抢号规则： 23号上午9点开始整点开放，每个整点15个名额，共105本，先到先得，速度来抢！！！ 关注腾讯灯塔公众账号，点击本文右上角，分享本文到朋友圈； 2. 23日早上9:00- 下午3：00每个整点，公众号开放抢号入口，点击【抢白皮书】进入抢号，每个整点先到先得，凭抢到的验证码和朋友圈转发截图到会场一楼腾讯众创空间展台现场领取 PS:23号上午9点,腾讯灯塔公众账号才会出现【抢白皮书】的菜单按钮噢，敬请期待！ 重要的事情说三遍！ 关注腾讯灯塔！ 关注腾讯灯塔！ 关注腾讯灯塔！
30020编辑于 2022-08-25 - 来自专栏QQ大数据团队的专栏
腾讯云大数据 X Uniffle：重新定义Data+AI效能
3 腾讯云解决方案： 基于Uniffle的EMR-RSS集群架构 腾讯云弹性MapReduce积极探索解决方案，基于社区Uniffle理念深度自研推出EMR-RSS集群架构，通过创新的"计算-存储分离" 结合腾讯内部业务积累的方案，腾讯云弹性MapReduce 在多种场景深度集成了腾讯自研RSS框架-Uniffle，针对Spark重度依赖客户和机器学习数据训练场景的客户，提供以下核心能力支持： 1.多框架无缝兼容 ● 端到端性能提升：腾讯内部推荐业务集成Uniffle后，Spark ML训练任务耗时从22.6小时缩短至8小时，效率提升300%。 6 应用实践 腾讯内部 视频号：解锁实时个性化推荐、边缘协同训练等前沿场景，助力构视频号差异化竞争力。 （欢迎扫描下方二维码，联系我们获取腾讯MapReduce+Uniffle架构白皮书与免费POC验证机会） 腾讯云大数据始终致力于为各行业客户提供轻快、易用，智能的大数据平台。
61110编辑于 2025-04-13 - 来自专栏五角钱的程序员
腾讯想拿到Big Data资源，8h删抓紧时间！！
目前腾讯的社交数据，阿里的交易数据每天都是PB级别，都是公司最具价值的超级资产。后起之秀的字节跳动更是以大量数据为引擎。
38440发布于 2021-04-26 - 来自专栏腾讯大讲堂的专栏
数据采集上报之灯塔SDK详解
作者：jackhuali 腾讯PCG工程师 |导语 灯塔SDK当前的日活终端设备数超过10亿，日事件上报量超过万亿条，灯塔SDK是什么，灯塔SDK做了哪些工作来支撑如此大业务需求的呢？ 我们可以从上述流程，并结合腾讯在大数据各个链路的现有系统上，理解灯塔SDK在整个大数据链路的位置。 从数据流向的角度看， ? 从整个大数据系统架构的角度看， ? 基于上述流程定义，灯塔SDK是腾讯通用的客户端用户行为事件（数据源）上报通道，带有本地缓存、失败重试，旁路监控等功能来保证日志安全可靠地上报至后端。 、腾讯视频、腾讯新闻、腾讯动漫等PCG绝大部分业务； 公司内兄弟BG，IEG、TME、WXG和CSIG等，如企业微信、QQ邮箱、王者荣耀、王者营地、QQ音乐、全名K歌、开心鼠英语、腾讯会议等业务； 兄弟公司或者其他公司业务 因为灯塔SDK自身作为一个上报通道，也可以作为监控上报的通道，但是为了监控灯塔SDK ，灯塔SDK使用腾讯的atta系统作为监控旁路，对灯塔SDK做监控上报，并将监控数据接入灯塔分析平台进行统计和分析。
5.2K41发布于 2021-05-10
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号